EC2上のプロセスを監視し自動復旧する

今回は EC2 インスタンス上のプロセスを監視し、プロセスが停止していたらアクションを実行する方法を試してみます。

#Amazon EC2

#Amazon CloudWatch

#AWS Systems Manager（SSM）

#AWS

吉井亮

2019.05.09

この記事は公開されてから1年以上経過しています。情報が古い可能性がありますので、ご注意ください。

こんにちは。ご機嫌いかがでしょうか。 "No human labor is no human error" が大好きな吉井です。

今回は EC2 インスタンス上のプロセスを監視し、プロセスが停止していたらアクションを実行する方法を試してみます。

ビジネス上の重要度は高くないので冗長化にコストをかけたくない、しかし、サービスが落ちていたら自動で復旧してほしいなという需要に応えます。

前提

CloudWatch Agent セットアップ

まずは対象の EC2 インスタンスに対して CloudWatch Agent のセットアップを行います。セットアップは以下のエントリを参照して行ってください。

新しいCloudWatch Agentでメトリクスとログの収集が行なえます

実装

今回は例として「httpd を監視して、プロセス数が 0 になったら EC2 インスタンスを停止する」という実装をします。

プロセス監視用 CloudWatch Agent 設定ファイルの作成

特定プロセスを監視する設定ファイルを作成します。設定ファイルはパラメータストアに格納します。

パラメータストアを開きます。

パラメータの作成 をクリックします。

<パラメータの詳細> 画面では以下の値を入力します。

項目	設定値
名前	識別しやすい名前を入力します。後で使うのでメモしておきます。
説明	説明文を入力します
利用枠	標準を選択します
タイプ	文字列を選択します
値	以下参照

{
    "metrics": {
        "metrics_collected": {
            "procstat": [
                {
                    "exe": "httpd",
                    "measurement": [
                        "pid_count"
                    ],
                    "metrics_collection_interval": 60
                }
            ]
        }
    }
}

"exe" にプロセス名を記述します。記述した文字列は正規表現として評価されます。

"exe" 以外にも指定が可能です。

pid_file: 作成するプロセス識別番号 (PID) ファイルの名前でプロセスを選択します。
exe: 正規表現の照合ルールを使用して、指定した文字列と一致するプロセス名のプロセスを選択します。
pattern: プロセスの起動に使用するコマンドラインでプロセスを選択します。正規表現の照合ルールを使用して指定した文字列と一致するコマンドラインを持つすべてのプロセスが選択されます。コマンドで使用されるパラメータやオプションも含めて、コマンドライン全体がチェックされます。

パラメータの作成 をクリックし、<パラメータの詳細> 画面を閉じます。